回到首頁
使用"排程資訊"增加伺服器客製化的進階監控
-
當監控伺服器制式化的資訊維運系統無法提供特殊應用需求時
可考慮利用"排程資訊"的功能,強化客制化的維運管理
"排程資訊"功能簡介
*.使用者自定執行程式或shell script
*.定時啟用指定程式
*.收集指定程式回報之資訊
*.使用and,not,or比對符合告警字串
*.客製化後製程式,依定時執行程式專案處理
*.整合維運管理系統做好標準控管機制
提供伺服器進階應用的的"排程資訊",可以讓應用程式層多一項異常訊息的溝通管道
"排程資訊"結合特定應用系統對異常事件之發佈,是客制化應用,讓特別專屬的應用程式整合入監控系統
"排程資訊""是伺服主機在應用系統層的輔助監測功能之一
維運系統對於伺服器是採全面監控,而不放過任何有可能造成主機營運異常的事件
當上述情況發生時,Watchdog資訊維運系統即會發佈警報並且執行警報機制,務求達到整體妥善率的防護加強
監控"排程資訊"的系統規格
偵測目的: 定時自動執行特定功能之程式並將產生之結果文字檔回傳
1.保留記錄
2.比對記錄內容符合警報條件
3.將記錄內容交由後製程式處理
監測目標: 使用程式
警報條件: 文字內容
即時資訊: 正常/警報發佈
資訊收集: 訊息,警報發佈/解除時間點
緊急處置: 通報,執行預定程式
警報臨界值: 依應用程式定義警報值
上圖即為排程資訊的主偵測頁面
點選伺服主機,選擇排程資訊的偵測圖示,點選之後即可進入以下畫面:
"排程資訊"功能有提供短期的警報分析圖與長期的資料清單,請由偵測首頁的圖示點選進去,即可進入選擇畫面:
點選[警報分析圖一週]即可進入警報分析圖,可以看到短期的警報狀況,如下圖
上圖可以看出05/17(星期二)的13點到18點30左右的時間,有出現警報的狀態
"排程資訊"功能除了短期的警報分析圖之外,也有長期的資料清單可以提供給維運人員使用
長期的比對記錄,進入方式只需要點選項目並且選擇範圍即可連結進去
從設定項目了解"排程資訊"功能
進入設定首頁即可開始設定,下圖的紅色框內為必要設定欄位:
1.事件名稱(英文數字):本欄位主要是填上該事件的名稱,只能輸入小寫英文與數字.
2.使用程式:輸入要定時執行的程式或是shell script的名稱.
3.程式選項與檔案名稱:本欄位為輸入程式或是shell script後面的各種參數之欄位.
4.執行時間(分):輸入範圍為1~9999,單位為分鐘,本欄位意義為每幾分鐘執行一次[使用程式],初始值為10分鐘.
5.長度限制(MB):輸入範圍為1~9MB,如果超出本欄位設定的範圍,視同為警報發生.
6.保留筆數:每執行一次[使用程式]則算一筆,本欄位輸入範圍為1~99筆,也就是執行程式後的記錄保留筆數.
7.警報:為輸入排程資訊功能之警報條件的欄位,點選進入即可進行設定,設定完成請務必點選儲存後即可使用.
上圖為排程資訊功能的主設定頁面,可由設定主畫面右上角的[紅色問號]點選進入,即可連到排程資訊功能的使用說明
以下為排程資訊功能的使用說明
依指定的執行時間定時啟動程式將所得之資訊經由"標準輸出"寫入檔案,
寫入檔案的方式也可以配合"事件警報"或"事件數據",同時將執行狀態回報,再由維運系統檢查執行內文
欄位說明
1.資訊名稱
*.一定要輸入,僅可用英文與數字,若為大寫,會自動轉成小寫
2.使用程式
*.定時執行之程式或shell script(若時收集本文檔,則不需輸入資料)
3.程式選項或檔案名稱
*.定時執行之程式之選項或是本文檔之位置(Full PATH)
4.執行時間
*.單位為分鐘,最低 1 分鐘,最高 9999 分鐘
5.長度限制
*.最高 9 Mbytes,若高於"最高警報值" 將會發出警報
6.保留筆數:最高 99 筆
7.警報
*.將已收集到之資料經由此設定,檢查是否符合警報條件,
*.若未設定,表示不檢查警報值,僅取得資料記錄
若符合 將會發出警報
*.執行程式一定要有 標準輸出">"的功能,否則系統將視為異常,而不執行
*.執行之程式或shell script,若非可系統環境執行之PATH,必須指定PATH
*.若己是警報,則不會再重複發送
*.若有警報,但己恢復正常值,則會發送解除警報
*.執行程式若失效,可利用"檔案偵測"來檢查程式是否定期執行
點選排程資訊功能之主設定頁面的警報圖示,即可進入進階設定條件的畫面,如下圖:
排程資訊功能之警報的設定,並非為必填欄位,當要進行進階設定時,請詳細參閱以下之使用說明
1.啟用警報:初值未打勾,如需起警報請直接打勾儲存即可,如未打勾則產生警報時會只記錄不發警報.
2.警報有效時間:初值為0,單位為秒,此欄位的功能為設定當警報發生時,經過多少秒復歸為未發生警報的狀態.
3.群組欄位:本欄位為設定要通報的目標群組,直接下拉選單選擇即可.
4.後製程式:依每一項資料特別定制的處理程式,當資料回報後會去呼叫該支執行程式開始運作
是屬於進階運用的一個重要環節.
每個排程資訊的偵測項目有0-29個進階的警報條件,點選右上角的[紅色問號]可以進本頁面的使用說明:
排程資訊之警報條件設定與用途:
執行後的檔案會以行字串為比對目標,比對符合之目標字串若相同則條件成立(警報)
警報內容通常會用此行文字為"警報內容"
欄位說明:
啟用: 有勾選才有比對之作用
第一組字串&
第二組字串&
第三組字串
以上欄位為 & and 條件法,必須全部符合才有警報條件成立,前後順序不影響
排除字串-1||
排除字串-2||
排除字串-3
以上欄位為 not與or 條件法,針對己警報條件成立之一行字串再進行比對
若一行字串內有符合任一"排除字串"則此行之警報條件則取消,前後順序不影響
[特別注意事項]:
*. 僅比對本文檔文字
*. 原始行文字不分字元大小寫,空白字元有效
*. 比對之文字不分字元大小寫,空白字元無效
*. 原始行文字是以檔案內文的一行字串為單位
*. 一行字串的最長字元為 510 Bytes 內有效
*. 無法比對的文字 "###" 三個 "#"
*. 警報事件是以一個檔案或事件為基準,一個檔案或事件不會發出一次以上的警報,若是"取消警�"則"警報事件"歸零
*. 後製程式是依資料屬性而特別製作之程式,不是系統內建
[使用排程資訊之後製程式] 範例
硬碟檢測 S.M.A.R.T 資訊 利用 GNU "smartctl"程式 取得硬碟S.M.A.R.T 資訊
使用後製程式 "wdogs_sch_smartctl"將資料產生於"事件數據"系統每60分鐘執行一次
如:
smartctl c:\rooty\wdogc\utlity\smartctl.exe -a /dev/sda 60
警報條件設定
第一組字串 "overall-health"
第二組字串 "self-assessment"
第三組字串 "FAILED"
smartctl 的"事件數據"資料如下:
1_Raw_Read_Error_Rate 較低階的磁區讀取錯誤
3_Spin_Up_Time 主軸起轉時間
4_Start_Stop_Count 硬碟主軸開始/停止的週期
5_Reallocated_Sector_Ct 重新分置的磁區計數
7_Seek_Error_Rate
9_Power_On_Hours 開機經過的時間(小時)
10_Spin_Retry_Count
12_Power_Cycle_Count 硬碟開關機循環量
184_Unknown_Attribute
187_Reported_Uncorrect
188_Unknown_Attribute
189_High_Fly_Writes
190_Airflow_Temperature_Cel
191_G-Sense_Error_Rate
192_Power-Off_Retract_Count
193_Load_Cycle_Count
194_Temperature_Celsius
195_Hardware_ECC_Recovered
197_Current_Pending_Sector
198_Offline_Uncorrectable
199_UDMA_CRC_Error_Count
200 Multi_Zone_Error_Rate
202 Data_Address_Mark_Errs
240_Head_Flying_Hours
241_Unknown_Attribute
242_Unknown_Attribute
254_Unknown_Attribute
[使用字串比對當硬碟有問是題時發出警訊]
smartctl 的檢測訊息內有
SMART overall-health self-assessment test result: PASSED (正常)
SMART overall-health self-assessment test result: FAILED (異常)
第一組字串 "overall-health"
第二組字串 "self-assessment"
第三組字串 "FAILED"
回到首頁
